| | | 
История и ий как получилось В ‚ Сбере 


/ , Ен Орлов 


Привет, я Семен Орлов 


©® Ргодис{ Ом/лег $ОР Надоор 


© 2 ВО: физика полупроводников 
и менеджмент 


© 1/3 жизни в ИТ. в и 
До прихода в Сбер работал в ОККО 


©® 1/6 жизни посвятил работе с УТЕНЬОР 


Каг5 а15 —з&гер —м 3 +4 
НЕ) НЕНГоаа"" 


О чём расскажу? 


© Историю, как делали 


И. 
ео . 
< 
х г 


№» - А. 
р ` 9’ 
Если нужна выжимка, мотай +25 минут Да Да продолжа 
| АХ 
1 ‚ р’. > 


НЕ) НЕНГоаа"" 


Масштабы сегодня 


150. 


ДАННЫХ 


77 д: 


В КЛАСТЕРЕ 


ре 


БАШНЯ ФЕДЕРАЦИЯ 


КЛАСТЕРОВ 


5 74. УЗЛА 


В КЛАСТЕРЕ 


НЕ) НЕНГоаа"" 


Окружение 2018 года 


1 {иИПоп $ 
Сотрапу 


ЕНРАЛМ/ОВЬО СУР 


ОЗУ 2018 


(но) ННГоаа"" 


Окружение 


\/ЕМООК 


\ 


НЕ) НЕНГоаа"" 


Окружение лифты 


СБЕР 
_ НАОООР 


—\ $0Р 
НАРООР 


(нь) ННГоаа"" 


Зачем начали делать? Мотивы 


° Сложная схема поддержки ‚ Безопасность 
‚ Невозможность работы оп $Це ° Интеграции в КАП 
° Затраты на архитектурную поддержку ° Автоматизация 
ТСО Экосистема 
® Существенная доля - лицензии . Орег# 
. Снижение стоимости 1ТБ . Соца 
е Гостех 


(но) ННЕоаа"" 


Продать идею бизнесу 


ТСО Поддержка 


Получить ресурсы 


Плюшки 
© Скорость обновлений 


© Компоненты 
© Вендор-риск 


(нь) ННЕоаа"" 
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Ключ: команда для «узких» кейсов 
зрительских 
2000 х2 873 ны 


+1 200+500+ 
+300 \х 10 


СЕ 


500/36 х 10/15 


Е. 
(не) Ннисаа" 
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Метрики или результаты: 


что важнее для выживания 


Базовые метрики 


. МАУ/БАЧ 


СР] 
АКРИ 
ЕТУ 
ВК 


Результаты 


Кластеры в РКО 
Бесшовная миграция 
Администраторы могут 
сопровождать 
Безопасность 

не дырявая 


(но) ННЕоаа"" 


ЕО: ргодисЕ \151юп не поможет 


№: Ц. % © 


Идея Оно работает ЕО Надоор РКО 
2 кластер 


| 2018 | 2019 | 2020 


04 01 
о В В 


опыт не пропьёшь, всех знаний не узнать (нь) НиЕНоаа** 


Собрать мало, мигрируй 


| 2019 | 2020 | 2021 | 2022 
Н1 Н2 Н1 Н2 Н1 Н2 Н1 Н2 
РОТ ) мыло | о | а 
Ргераге Миграция уепадог-> $ОР 


(но) ННГоаа"" 


Проект миграции 


100+ кластеров | 1 000+ экземпляров ППО | 50 тех сервисов 


Комиссия по р ь ЕЕ и АВА > Статус миграции на 
инфраструктуре группа * СТАТУС Надоор3 
. СТАТУС миграции 
* ИЗМЕНЕНИЕ 
ПЛАНОВ ежемесячно 
фсе еее ео > 
еженедельно РГ Фабрики 
* ИЗМЕНЕНИЕ 
ПЛАНОВ Данных 
я * ЭСКАЛИРУЕМ 
кспертная площадка 
р и «......... > по необходимости 
по разработке 
ППО для Надоор3 АДАПТАЦИИЯ ППО «......... . 
Рабочие встречи- 
х ИЗМЕНЕНИЕ эскалации 
ПЛАНОВ 
еженедельно * ЭСКАЛИРУЕМ 


ежемесячно по необходимости 


Схема миграции 


СОН С!и$ег 5ОР”/и$ег 
ПЯТНАШКИ 
С СЕРВЕРАМИ СОН Сизкег ОР Саб 


АРР1 АРР2 АРР2 АРРЗ 


ОР\С!и {ег 


+20 % 


СОН Си$%ег 


АРР1 АРР2 АРРЗ 


НЕ) НЕНГоаа"" 


АРР1 


ие. 
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Какие задачи на Надоор 


А что дорабатывали? 


5%5603,10.01 Потоковая | КАП801 Портал 
$5603.20 Пакетная загрузка 
данных в КАП 


— ОМ/Н 


— Реплики 
Бас и МАТ 
9 фреймворков 


КАП805 Выполнение 
подписок 


КАП812 Панель 
кибербезопасности 


КАПВ21 Портал 
инфоактивов 
5\5603.10.03 Сервис загрузки 
данных х5иеат 


5\5603.10.04 Ввод 
пользовательских данных -- 


$5\5603.10.05 Хеширование 


и токенизация при о 
‘данных из контура РС! 05$ : 


5\5603.10.06 Загрузка данных 
‘из архивных АС 


5\5603.10.07 Хеширован 


= ОафтаМат5 Г сы 
— МЕ 


— ИщедгаНоп$: 
а [01 


данных в КАП 


данных КАП 


$\5603.10.10 Оптимизация 
данных реплик (а!а 5Парег) 


5у5604.09.02 Управление доступом 55605.13 Управление 55605.19 Сервисные 
лианы пообаьАИ 
55609.06 Сервис управления || $\5601.01.03 
потоками данных | Журналирование КАП 
55604,14 Сервис безопасной 
выгрузки КАП 


55602.26 Пакетная обработка 


55602.29 Потоковая обработка 


Корпоративная аналитическая платформа (КАП) 


КАП802 КАП803 НЫ КАП804 Опубликованные КАП806 Графовые данные 
Первичные данные данные (ЕСС) данные АХД $5602.30 $С -доступ 
к данным КАП 
КАП807 Управление НСИ КАП808 Разделяемое КАПВ09 Геоданные КАПВИИ Архивы детальных $5602.31 Доступ к данным | 
хранилище данных АХД 


КАП в реальном времени 


5602.32 Потоковая 
КАП813 Карта данных КАПВ14 Контроль качества }\ КАП815 Унифицированные '} КАП816 Индексированные | 
5 .33 Единый сервис 
КАП822 Описание и КАП823 Управление ассортиментом КАПВ24 Аналитика и отчётность поставки данных 
разметка инфоактивов Супермаркета данных . 


ЕН Г 55602 33.02 Пакетная 
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выгрузка из КАП в ТФС 


5\5602.44 Гетерогенный | 
до да ь АЦ | 


5\5602.27 Графовая пл 


55610.06 Пакетное 
исполнение моделей (ПИМ) 


$5602.23 Сертификация 
данных КА! 


$75608 05 02 Хранение данных | 


еепр№т 
$\5605.05.03 Хранение данных 
КАПв АЯ 


5\5602.24 Корректировки | Графо т ое. р $\5605.05.04 Хранение данных 
‚данных в КАП КАП в обе Надоор, 


. 


5\5605.05.05 Хранение данных 
$5602.25 Унификация 
клиентских данных КАГ 


КАП в Розтаге СЕ 
$\5605.05.06 Хранение данных 5605.22.01 Сервис 
55602.48 Геообработка 


И 
П в Огаде Ехада"а федеративного доступа 
О (НОЕ байемау) 
‘ервис 


5\5605.22.02 С 
федеративного доступа 
В ЕО мк 


5\5608.20 Инст ты тар: 
И" ри роди 
к о а 


|| 
| 5560818 Инструменты 55605.26 Анализ бет 
администрирования КАП использования данных р 
| 1 ИвНОГ 
| 


$\5605.05.07 Х] ние данных 
КАП в избе 08 


5 
о 


5\5605.22.04 Сервис 
5\5608,21 Сервис управления | $5608.22 Сервис управления еее ей 


55601.08 Мониторинг КАП сетевыми взаи ствиями правилами и моделями доступа 
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ЭРрЕныев 9 -—> 3 


Сложности 


Си${ег1 
Надоор 2 


Надоор 
ВоскКаепиНег 


ЗфогазеТуре: 550, 01$К, 
АВКСНМЕ 


Сиз{егМ 
Надоор 2 


Си$ег1 
Надоор 3 


СизегМ 
Надоор 3 


(но) ННЕоаа"" 


Федерации х 


ВОВ —> КАШТ 


100х кластеров 


|птогтайоп ШТесуце 


Мапазетег{ 
Ргоху, ЕедегаНоп Та Ах 
о. Ни 1% ко У 
> иы ий ее, К \ 


НЕ) НеНЕоаа"" 
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Доработки кибер-безы 


Грануляция привилегий Па{5 зпар5Пот{ 
С\Е-фикс для 5рагК 3 


Аудит Атрап 


Совместимость Капеег и НБазе 


НЕ) НЕНГоаа 


Доработки Нме 


сгеафе ежегпа| фаб|е 
612 фае 
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НОР 


..хаЫе/ 
..КаБе/ <100к+ рагюоп> 


(но) ННЕоаа"" 


Как определить что пора? 


Потребности Возможности 


Сроки Со${ 2 уаше-анализ 


(но) ННЕоаа"" 


Если бы пришлось повторить 


| 2018 | 2019 | 2020 
04 01 02 ОЗ 04 01 02 ОЗ 
Рот Релиз 1.0 } Релиз 2.0 Релиз 2.х 


24-223 34-а =2Р2 
23 (НЕ) Минеоаа" 


Какую команду собирать 


22. ев 

2: МУР ОемОрз 

Ы] 

вЕ ГАОМСН ОемОр$ ОА ОМ 

2: т Е) 2 
ви РКОО 


ОемОрз ОМ ОЕ\ ОЕ 


(но) НЕНЕоаа"" 


Выводы 


Верить Если делать, то 
в идею получится 


Есть Команда - 
есть результат 


(нь) ННГоаа"" 
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СПАСИБО 


| зтедатоном | 


Сцена после титров 


1. Что будет с классическим дистрибутивом ближайшие 3 года 
2. Как трансформируется платформа обработки данных в Сбере 


3. Когда Надоор действительно умрет или переродится 
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(но) ННЕоаа"" 


